7fc97ab8a09cccd238b3172123a4598b78482817
v15
- challenge
- Passage Retrieval
- submitter
- Anna
- submitted
- 2023-01-31 12:43:42.805975 UTC
- file basename
- out
test-A / 26008db86e0dc1fc58b1fa8d19f739a1f536b635
| Metric | Score |
|---|---|
| NDCG@10 | 58.19 |
dev-0 / d6e2e9ff2e734c1f8f96bbf6ec097f4436625d71
| Metric | Score |
|---|---|
| NDCG@10 | 31.36 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 3366912-0 110626-0 561684-5 2215805-0 640307-0 75124-22 1831071-0 2005842-2 255996-0 2259691-0 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 1775405-2 664688-3 41896-2 750315-0 664688-1 21753-5 1775405-4 934126-0 934126-4 493645-4 | 0.00 |
| 3 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 101527-1 4304342-6 109175-0 552904-0 2005270-0 3584220-0 1805254-3 49762-0 3022006-0 3572733-0 | 0.00 |
| 4 | wiki-trivia Na którym kontynencie leży Gabon? | 74511-0 74511-42 74511-71 74511-93 | 148742-1 169557-2 169557-5 297216-8 110626-0 508786-1 156-4 416391-1 726092-1 1712719-3 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 1492531-1 289910-0 4978480-17 3839179-0 3643784-0 1142726-37 1720777-0 14103-0 1799769-22 3180509-4 | 0.00 |
| 6 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 2077252-2 181282-7 4096279-0 181284-0 51116-0 3710137-7 162129-6 2896543-3 4086255-1 4083243-0 | 0.00 |
| 7 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 1589274-4 3311571-3 294998-0 299223-2 8914-1 23224-18 45854-14 450522-3 1149496-2 1048369-6 | 0.00 |
| 8 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 108372-0 5465-8 5465-10 11569-0 90478-1 453381-20 1231010-0 63030-0 160772-0 11569-1 | 0.00 |
| 9 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 937406-0 354435-4 73042-0 3317324-0 3505140-0 76591-0 2784587-0 3317324-1 2616342-0 16122-0 | 0.00 |
| 10 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 2130804-0 2210821-0 2044201-0 5134822-0 2044201-2 4094357-2 815271-8 4102741-0 2130804-1 2334502-0 | 0.00 |
| 11 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 113882-4 3954813-23 113879-4 113874-4 6728-7 27673-3 4872-1 136382-5 4498-4 45859-2 | 0.00 |
| 12 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 6084-2 917904-18 6171-18 30332-19 41147-0 1864772-3 513522-0 10461-37 984042-5 3289-16 | 0.00 |
| 13 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 5190029-481 3990518-1 18446-32 4700256-2 2396985-2 4644549-4 21547-14 1940019-16 221655-6 692347-0 | 0.00 |
| 14 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 80936-12 2399186-3 129691-93 1937854-0 638279-3 896549-2 2454429-1 7293-30 7751-25 3073408-3 | 0.00 |
| 15 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 45745-0 289416-0 802949-47 448569-12 1352183-2 4635429-0 35994-24 65401-1 1271388-25 1797224-0 | 0.00 |
| 16 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2174186-2 456762-2 1676730-0 1263801-3 2789510-3 1834305-0 1263801-7 1834235-0 743905-1 1715423-0 | 0.00 |
| 17 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 1005884-9 2900593-1 306960-47 563600-11 245782-0 1717026-4 1826272-186 245782-3 9724-143 2743250-0 | 0.00 |
| 18 | wiki-trivia W którym wieku żył Karol Darwin? | 44869-0 1142-4 7395-26 7828-34 | 26966-4 1495894-7 332877-0 1103313-5 1023740-0 878358-0 1680688-0 58853-2 1673955-1 1475987-3 | 0.00 |
| 19 | wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? | 491777-0 503711-0 6624-9 503711-67 | 2599243-1 1779092-0 6624-14 6624-11 937744-20 89155-0 503711-1 746926-74 3740698-27 746926-34 | 0.00 |
| 20 | wiki-trivia Który car rosyjski wprowadził grażdankę? | 129904-0 908-2 22313-16 2854198-24 2705-7 | 603627-2 8786-6 2616468-2 692-26 997380-0 165406-2 2064866-14 63618-0 3462782-11 8786-9 | 0.00 |
| 21 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 1326878-16 76561-23 20338-18 76561-21 1244780-20 875057-0 91329-159 381998-21 1552826-228 929707-10 | 0.00 |
| 22 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1919191-28 1249108-5 2239844-21 4450256-0 108880-8 644625-23 6090-21 222726-8 175305-4 172733-38 | 0.00 |
| 23 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 390349-0 425167-1 425167-7 1818942-5 420939-0 395316-0 4729347-3 4170322-3 4742459-3 4744199-3 | 0.00 |
| 24 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 2048728-5 4099215-4 4498934-4 663670-5 3861220-1 1732393-10 1632804-0 1695909-3 70040-20 2202227-4 | 0.00 |
| 25 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-17 143094-19 1996923-0 2311468-1 1324757-51 3313151-26 44393-9 143094-17 6567-1 43683-7 | 0.00 |
| 26 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 1197116-6 10381-13 1219607-4 87671-19 275539-0 177381-117 3538138-40 2809404-3 317788-1 1373149-51 | 0.00 |
| 27 | wiki-trivia Jak miał na imię Makuszyński? | 49827-0 49827-8 49827-14 1509748-0 12060-7 | 3491498-17 755721-27 878306-2 1912083-3 1290019-7 431500-8 2227036-14 1453207-1 1217914-81 178550-8 | 0.00 |
| 28 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 1196749-10 630875-88 974345-0 72097-39 196693-1 128695-3 123664-5 148265-13 630875-95 199569-13 | 0.00 |
| 29 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 288207-10 2706007-2 2320553-11 2077-13 4181943-0 184952-0 2605129-9 4478120-3 695622-8 516488-4 | 0.00 |
| 30 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 391783-28 1322911-1 470606-7 523776-3 17414-0 2371997-0 560272-10 1016451-11 1016459-14 1017331-10 | 0.00 |
| 31 | wiki-trivia Z repertuaru którego zespołu pochodzi utwór „Jestem z miasta”? | 1642348-0 741949-0 204472-3 3208891-8 | 1642348-2 1159288-1 3704391-8 803306-1 1543428-1 1892721-1 172313-29 974175-3 1010645-0 2902366-8 | 0.00 |
| 32 | wiki-trivia Liderem którego zespołu jest Adam Darski – Nergal? | 83232-1 472598-1 3100278-2 800524-2 2287893-0 | 694540-2 632024-4 2988112-0 632802-6 481271-1 1438720-3 481379-3 3100278-0 1675354-21 632900-3 | 0.00 |
| 33 | wiki-trivia Jak miała na imię żona Heraklesa? | 3136602-0 39725-0 11468-0 11468-22 39725-2 | 12500-0 553468-0 4528710-0 204427-2 4528681-0 1006997-1 4075888-1 163063-1 12500-15 1237251-0 | 0.00 |
| 34 | wiki-trivia Która dyscyplinę sportu uprawiał zawodowo Mariusz Czerkawski? | 201577-0 118655-38 2733996-19 935701-2 | 11230-5 201577-69 3582461-0 506132-1 201577-7 1112207-2 201577-67 1665385-46 2908965-0 4187568-12 | 0.00 |
| 35 | wiki-trivia Jakie zwierzę widnieje w godle Wenecji? | 3517-75 517835-1 996055-5 | 2319571-3 2378349-2 170281-3 163423-4 925742-1 76262-5 754081-4 602381-3 711024-2 562507-0 | 0.00 |
| 36 | wiki-trivia Jak nazywa się instrument muzyczny i ogon cietrzewia? | 445920-18 | 51223-9 2385416-2 51223-8 51223-10 129761-0 113286-3 3469201-8 116386-0 17012-1 17770-0 | 0.00 |
| 37 | wiki-trivia Jedna z mitycznych gorgon oraz jamochłon morski mają wspólną nazwę? | 108851-0 108851-2 108851-4 27899-19 1877199-2 | 1156134-1 4262750-1 2025784-0 129350-0 3247744-0 1877199-0 227878-0 2727288-6 463184-0 683880-0 | 0.00 |
| 38 | wiki-trivia Na jaką chorobą zapadła Nel, bohaterka „W pustyni i w puszczy”? | 88267-8 | 41896-2 774506-7 435160-0 5016947-0 4294485-0 664688-0 88267-19 3308639-0 664688-4 3009874-7 | 0.00 |
| 39 | wiki-trivia Jak z francuskiego nazywa się pomieszczenie w teatrze, w którym widownia przebywa w trakcie przerwy? | 736692-0 | 46823-0 63477-0 524484-5 3273694-8 4185956-4 1813985-9 171373-3 1666564-16 2641523-18 990086-5 | 0.00 |
| 40 | wiki-trivia Jak nazywa się elastyczna deska umożliwiająca wybicie przy skokach do wody? | 90738-0 2996100-0 2996414-0 2066472-0 4112844-1 | 306214-4 4595660-2 1055624-3 2330285-0 321629-5 431908-0 117311-0 74639-0 90738-2 536667-0 | 0.00 |